34
こころの
測り方
長らく人の音声と動作の時間構 造について考える研究をしてきた ので，撮影された映像をどうデー タ化するかはいつも悩みの種でし た。2000年代にマックス・ブラ ンク心理言語学研究所の言語学セ クションで開発された「ELAN」 （Lausberg & Sloetjes, 2009）は， この悩みを解決してくれる理想的 なソフトウェアです。行動分析 のみならず，簡単なインタビュー おこしから，映画・アニメーショ ンの分析まで，そしてゼミや研究 会，リフレクションなどさまざま な討議の場面で意見やアイディア を映像・音声と紐づけるのに利 用でき，しかもフリーウェアで， Macintosh, Windows, Linuxの い ずれの環境でも動きます。すでに 映像・音声を詳細に記述する必要 性にかられている研究者には，と にかく試しに使ってみることを お薦めします（https://tla.mpi.nl/ tools/tla-tools/elan/）。 では，映像とELANを用いた行 動の記述法にはどのようなもの があるのでしょう。以下では，行 動研究の代表的な方法として，時 間を等間隔に区切って行動を評定 していく方法と，行動の開始時刻 と終了時刻を記述する方法を簡単 に紹介します。それぞれにおい てELANがどのように活用でき るかは，ELANのオンライン・マ ニュアルや細馬・菊地（2019）を ご参照ください。 時間サンプリング法 行動分析ではしばしば，時間を 一定間隔（たとえば5秒，1分な ど）に区切って，それぞれの区間 になんらかの評定をつけていく 「時間サンプリング法」を用いま す。この方法はもともと，野外観 察を主とする動物行動学（エソロ ジー）の分野で発達してきまし た。心理学でも，単位時間あたり のコミュニケーションの質を評 定する手法（Bakeman & Quera 2011）や，応用行動分析でクライ アントの動きを数秒ごとに評価し て数値で表す手法（Cooper et al. 2019）に応用されています。 映像や音声記録にも時間サンプ リング法は使えます。この場合 は，記録を等間隔の単位時間に区 切り，単位時間ごとに一つの評定 を行います。幸い，ELANには， データのタイムラインを指定した 単位時間で区切る機能が備わって いるので，映像を見ながら簡単に 評定作業を行うことができます。 人によって評定の結果が異なる場 合は，複数の評定者を設けて「観 察者間の一致度（たとえばCohen のκ）」を測定しますが，ELAN にはこれを計算する機能も備わっ ています。時間サンプリングを用 いて刻々と変化するコミュニケー ションを，どんな尺度を用いてど う評定していけばよいのかについ ては，非言語コミュニケーション 研 究（ た と え ばManusov, 2005） ですでに確立された方法があるの で参考にするとよいでしょう。 行動の開始点・終了点を記述する 映像や音声が記録されている 場合は，行動がいつ始まりいつ終 わったかを正確に記述できます。 相互行為分析など，コミュニケー ションの微細な過程を問題にする 分野では，一つ一つの行動の開始 点と終了点をコーディングしてい く方法が主流です。ここでは現在 よく使われている「ジェスチャー 単位」と「ジェスチャー・フェー ズ」（Kendon, 2004）の考え方に 基づきながら，行動の開始点・終 了点を記述する方法（細馬・菊 地，2019）を紹介しましょう。 ごくおおまかに言って，わたし たちの腕や手は，比較的ある姿勢 で落ち着いているときと，あちこ ち動かしているときとがありま す。落ち着いているときの姿勢に は，腕組み，頬杖，あるいは両腕を だらりとさげたり膝の上に置いた りといった具合に，いくつか典型 的なものがあります。これらの姿 勢のことを「ホーム・ポジショ ン」あるいは「レスト・ポジショ ン」と呼びます。わたしたちの動 作は，いわばレスト・ポジション から始まりレスト・ポジションに 終わる短い旅と考えることができ るでしょう。この短い旅のこと を，「ジェスチャー単位」と呼び ます。ただしジェスチャー単位 は，必ずしも前と同じレスト・ポ ジションで終わるとは限らず，さ まざまなポジションへと移行して いく場合もあります。 ジェスチャー単位はさらにいく つかの「フェーズ」に分けるこ とができます。フェーズには，大 きく分けて，動きのあるフェーズ （動作）と動きのない一時停止の フェーズ（ホールド）の二つがあ ります。フェーズは，動作の方向 や速度が不連続になる部分で区切 ります。たとえば，腕を振り上げ て下ろすとき，わたしたちの腕は まず振り始めに加速し，中盤で最 も速度を出し，振り上げの頂点に映像とELANを用いた
行動の分析
早稲田大学文学学術院 教授細馬宏通
（ほそま ひろみち）35 向けて次第に減速し，頂点で方向 が切り替わります。そこからすぐ に振り下ろしに向けて加速が始ま り，中盤で再び最速となり，振り下 ろした先で一時停止します。この 場合，頂点で方向が不連続になる ので，そこでフェーズを区切って， 振り始めから頂点までを一つの動 作フェーズ，頂点から振り下ろし までをもう一つの動作フェーズと し，振り下ろした場所で停滞して いる状態をホールドとします。 動作フェーズはさらにいくつ かに分類できます。動きの中心 となるフェーズを「ストローク （stroke）」 と 呼 び ま す。 た と え ば，腕振りの例では，腕を振り下 ろすとき，頂点から振り下ろした いちばん下のところまでが「スト ローク」にあたります。長い動作 では，いくつかのストロークが連 続することもあります。 ストローク・フェーズの前後 には「移行（transition）」の動作 フェーズが挟まることがしばしば あります。たとえばレスト・ポジ ションからいきなりストロークに 入るのではなく，いったん腕を軽 く振り上げて，それから勢いよく ストロークに入るときがありま す。このように，静止状態からス トロークの開始点へと移行する ときの動き（たとえば振り上げ） を「準備（preparation）」と呼び ます。一方，ストロークの終了点 からレスト・ポジションに戻ると き，腕や手が急にそれまでの勢い を失ってゆっくり動くように見え ることがありますが，こうした移 行の動きを「復帰（retract）」と 呼びます。 ジェスチャー単位によっては， 準備や復帰を欠き，いきなりスト ロークで始まるものやストローク で終わるものがあります。また， 軌道があいまいなものもありま す。ストローク以外のあいまいな フェーズは「その他の移行」とす ればよいでしょう。以上のフェー ズをどこまで細かく分類するかは 分析の目的や動作の性質によりま す。少なくとも「レスト」「動作」 「ホールド」の3種類のフェーズ について行動の開始点・終了点が 記述できていればよいでしょう。 その他の 移行／X 復帰／R 準備／P 移行 ストローク ／S ホールド ／H 動作 身体動作 レスト ／O ジェスチャー単位 フェーズの開始・終了点が記 述できたら，次に各フェーズの性 質を記述していきます。一つの フェーズを一つのジェスチャーに 分類する方法としてはEkmanと Friesen（1969）の分類がよく用 いられます。彼らは「言語に伴い やすい自発的なジェスチャー」を 「イラストレーター」と呼び，バ トン（特に意味はない，手を周期 的に動かす，リズムをとる）・イ デオグラフ（なんらかの思考の経 路を表す）・指示（なんらかの対 象に対する指し示し）・空間的動 き・キネトグラフ（実際のからだ の動きを真似る）・ピクトグラフ （対象の形を描く）の六つに分類 しました。 エクマンとフリーセンの方法 は，一つのジェスチャーを一つの 分類に落とし込むためのものです が，ジェスチャー研究者のMcNeill （2005）は，一つのジェスチャーに は重層的な意味があり，さまざま な「次元」について，その性質を 考えるべきであると主張していま す。こうした「次元」を時間軸に 沿って記述するには，一つの動作 フェーズに対して，複数の注釈を 行うソフトウェアが必要ですが， 実はこれを実現してくれるのが， ELANなのです。 これまでMcNeillの主張するよ うな次元の記述はとても手間がか かるため必ずしもポピュラーでは ありませんでした。しかし，いま やELANのようなソフトウェア の登場によって，行動の多様な側 面を時間軸に沿って記述する研究 が増えつつあるのです。 文 献
Bakeman, R. & Quera, V. (2011). Ｓ e ｑ u e n ｔ i a l a n a l ｙ ｓ i ｓ a n ｄ oｂｓervaｔional meｔhoｄｓ ｆor ｔhe ｂehavioral ｓｃienｃeｓ. Cambridge University Press.
Cooper, J. O., Heron, T. E, & Heward, W. L. (2019). Aｐｐlieｄ ｂehavior analｙｓiｓ． ₃rｄ eｄ. Pearson. Ekman, P. & Friesen, W. (1969). The
repertoire of nonverbal behavior: Categories, origins, usage, and coding. Ｓemioｔiｃa︐ ₁, 49-98. K e n d o n , A . ( 2 0 0 4 ) . ɢ e ｓ ｔ u r e .
Cambridge University Press. Lausberg, H. & Sloetjes, H. (2009).
Coding gestural behavior with the NEUROGES-ELAN system. Behavior ʀeｓearｃh Ｍeｔhoｄｓ︐ ɪnｓｔrumenｔｓ︐ ＆ Ｃomｐuｔerｓ︐ ₄₁, 841-849.
細馬宏通・菊地浩平（2019）『ELAN 入門』 ひつじ書房
Manusov, V. & Patterson, M. L. (Eds.) (2005). Ｔhe Ｓaɡe hanｄｂooｋ oｆ nonverｂal ｃommuniｃaｔion. Sage Publications, Inc.
McNeill, D. (2005). ɢeｓｔure anｄ ｔhouɡhｔ. University of Chicago Press. Profi le — 細馬宏通 1992 年，京都大学大学院理学研 究科博士課程修了。2019 年より 現職。専門は人間行動学。著書に 『ELAN 入門』（編著，ひつじ書房）， 『介護するからだ』（医学書院）など。
